home *** CD-ROM | disk | FTP | other *** search
/ Chip 2007 January, February, March & April / Chip-Cover-CD-2007-02.iso / Pakiet bezpieczenstwa / mini Pentoo LiveCD 2006.1 / mpentoo-2006.1.iso / livecd.squashfs / usr / include / awk / regex_internal.h < prev    next >
C/C++ Source or Header  |  2005-10-13  |  24KB  |  814 lines

  1. /* Extended regular expression matching and search library.
  2.    Copyright (C) 2002, 2003, 2004 Free Software Foundation, Inc.
  3.    This file is part of the GNU C Library.
  4.    Contributed by Isamu Hasegawa <isamu@yamato.ibm.com>.
  5.  
  6.    The GNU C Library is free software; you can redistribute it and/or
  7.    modify it under the terms of the GNU Lesser General Public
  8.    License as published by the Free Software Foundation; either
  9.    version 2.1 of the License, or (at your option) any later version.
  10.  
  11.    The GNU C Library is distributed in the hope that it will be useful,
  12.    but WITHOUT ANY WARRANTY; without even the implied warranty of
  13.    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  14.    Lesser General Public License for more details.
  15.  
  16.    You should have received a copy of the GNU Lesser General Public
  17.    License along with the GNU C Library; if not, write to the Free
  18.    Software Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA
  19.    02111-1307 USA.  */
  20.  
  21. #ifndef _REGEX_INTERNAL_H
  22. #define _REGEX_INTERNAL_H 1
  23.  
  24. #include <assert.h>
  25. #include <ctype.h>
  26. #if 0
  27. /* Don't include this here. On some systems it sets RE_DUP_MAX to a
  28.  * lower value than GNU regex allows.  Instead, include it in
  29.  * regex.c, before include of <regex.h>, which correctly
  30.  * #undefs RE_DUP_MAX and sets it to the right value.
  31.  */
  32. #include <limits.h>
  33. #endif
  34. #include <stdio.h>
  35. #include <stdlib.h>
  36. #include <string.h>
  37.  
  38. #if defined HAVE_LOCALE_H || defined _LIBC
  39. # include <locale.h>
  40. #endif
  41. #if defined HAVE_WCHAR_H || defined _LIBC
  42. # include <wchar.h>
  43. #endif /* HAVE_WCHAR_H || _LIBC */
  44. #if defined HAVE_WCTYPE_H || defined _LIBC
  45. # include <wctype.h>
  46. #endif /* HAVE_WCTYPE_H || _LIBC */
  47.  
  48. /* In case that the system doesn't have isblank().  */
  49. #if !defined _LIBC && !defined HAVE_ISBLANK && !defined isblank
  50. # define isblank(ch) ((ch) == ' ' || (ch) == '\t')
  51. #endif
  52.  
  53. #ifdef _LIBC
  54. # ifndef _RE_DEFINE_LOCALE_FUNCTIONS
  55. #  define _RE_DEFINE_LOCALE_FUNCTIONS 1
  56. #   include <locale/localeinfo.h>
  57. #   include <locale/elem-hash.h>
  58. #   include <locale/coll-lookup.h>
  59. # endif
  60. #endif
  61.  
  62. /* This is for other GNU distributions with internationalized messages.  */
  63. #if (HAVE_LIBINTL_H && ENABLE_NLS) || defined _LIBC
  64. # include <libintl.h>
  65. # ifdef _LIBC
  66. #  undef gettext
  67. #  define gettext(msgid) \
  68.   INTUSE(__dcgettext) (INTUSE(_libc_intl_domainname), msgid, LC_MESSAGES)
  69. # endif
  70. #else
  71. # define gettext(msgid) (msgid)
  72. #endif
  73.  
  74. #ifndef gettext_noop
  75. /* This define is so xgettext can find the internationalizable
  76.    strings.  */
  77. # define gettext_noop(String) String
  78. #endif
  79.  
  80. #include "mbsupport.h" /* gawk */
  81.  
  82. #if (defined MBS_SUPPORT) || _LIBC
  83. # define RE_ENABLE_I18N
  84. #endif
  85.  
  86. #if __GNUC__ >= 3
  87. # define BE(expr, val) __builtin_expect (expr, val)
  88. #else
  89. # define BE(expr, val) (expr)
  90. # define inline
  91. #endif
  92.  
  93. /* Number of bits in a byte.  */
  94. #define BYTE_BITS 8
  95. /* Number of single byte character.  */
  96. #define SBC_MAX 256
  97.  
  98. #define COLL_ELEM_LEN_MAX 8
  99.  
  100. /* The character which represents newline.  */
  101. #define NEWLINE_CHAR '\n'
  102. #define WIDE_NEWLINE_CHAR L'\n'
  103.  
  104. /* Rename to standard API for using out of glibc.  */
  105. #ifndef _LIBC
  106. # define __wctype wctype
  107. # define __iswctype iswctype
  108. # define __btowc btowc
  109. # define __mempcpy mempcpy
  110. # define __wcrtomb wcrtomb
  111. # define attribute_hidden
  112. #endif /* not _LIBC */
  113.  
  114. #ifdef __GNUC__
  115. # define __attribute(arg) __attribute__ (arg)
  116. #else
  117. # define __attribute(arg)
  118. #endif
  119.  
  120. #if _LIBC || __GNUC__ >= 3
  121. # define BE(expr, val) __builtin_expect (expr, val)
  122. #else
  123. # define BE(expr, val) (expr)
  124. # define inline
  125. #endif
  126.  
  127. extern const char __re_error_msgid[] attribute_hidden;
  128. extern const size_t __re_error_msgid_idx[] attribute_hidden;
  129.  
  130. /* Number of bits in an unsinged int.  */
  131. #define UINT_BITS (sizeof (unsigned int) * BYTE_BITS)
  132. /* Number of unsigned int in an bit_set.  */
  133. #define BITSET_UINTS ((SBC_MAX + UINT_BITS - 1) / UINT_BITS)
  134. typedef unsigned int bitset[BITSET_UINTS];
  135. typedef unsigned int *re_bitset_ptr_t;
  136. typedef const unsigned int *re_const_bitset_ptr_t;
  137.  
  138. #define bitset_set(set,i) (set[i / UINT_BITS] |= 1 << i % UINT_BITS)
  139. #define bitset_clear(set,i) (set[i / UINT_BITS] &= ~(1 << i % UINT_BITS))
  140. #define bitset_contain(set,i) (set[i / UINT_BITS] & (1 << i % UINT_BITS))
  141. #define bitset_empty(set) memset (set, 0, sizeof (unsigned int) * BITSET_UINTS)
  142. #define bitset_set_all(set) \
  143.   memset (set, 255, sizeof (unsigned int) * BITSET_UINTS)
  144. #define bitset_copy(dest,src) \
  145.   memcpy (dest, src, sizeof (unsigned int) * BITSET_UINTS)
  146. static inline void bitset_not (bitset set);
  147. static inline void bitset_merge (bitset dest, const bitset src);
  148. static inline void bitset_not_merge (bitset dest, const bitset src);
  149. static inline void bitset_mask (bitset dest, const bitset src);
  150.  
  151. #define PREV_WORD_CONSTRAINT 0x0001
  152. #define PREV_NOTWORD_CONSTRAINT 0x0002
  153. #define NEXT_WORD_CONSTRAINT 0x0004
  154. #define NEXT_NOTWORD_CONSTRAINT 0x0008
  155. #define PREV_NEWLINE_CONSTRAINT 0x0010
  156. #define NEXT_NEWLINE_CONSTRAINT 0x0020
  157. #define PREV_BEGBUF_CONSTRAINT 0x0040
  158. #define NEXT_ENDBUF_CONSTRAINT 0x0080
  159. #define DUMMY_CONSTRAINT 0x0100
  160.  
  161. typedef enum
  162. {
  163.   INSIDE_WORD = PREV_WORD_CONSTRAINT | NEXT_WORD_CONSTRAINT,
  164.   WORD_FIRST = PREV_NOTWORD_CONSTRAINT | NEXT_WORD_CONSTRAINT,
  165.   WORD_LAST = PREV_WORD_CONSTRAINT | NEXT_NOTWORD_CONSTRAINT,
  166.   LINE_FIRST = PREV_NEWLINE_CONSTRAINT,
  167.   LINE_LAST = NEXT_NEWLINE_CONSTRAINT,
  168.   BUF_FIRST = PREV_BEGBUF_CONSTRAINT,
  169.   BUF_LAST = NEXT_ENDBUF_CONSTRAINT,
  170.   WORD_DELIM = DUMMY_CONSTRAINT
  171. } re_context_type;
  172.  
  173. typedef struct
  174. {
  175.   int alloc;
  176.   int nelem;
  177.   int *elems;
  178. } re_node_set;
  179.  
  180. typedef enum
  181. {
  182.   NON_TYPE = 0,
  183.  
  184.   /* Node type, These are used by token, node, tree.  */
  185.   CHARACTER = 1,
  186.   END_OF_RE = 2,
  187.   SIMPLE_BRACKET = 3,
  188.   OP_BACK_REF = 4,
  189.   OP_PERIOD = 5,
  190. #ifdef RE_ENABLE_I18N
  191.   COMPLEX_BRACKET = 6,
  192.   OP_UTF8_PERIOD = 7,
  193. #endif /* RE_ENABLE_I18N */
  194.  
  195.   /* We define EPSILON_BIT as a macro so that OP_OPEN_SUBEXP is used
  196.      when the debugger shows values of this enum type.  */
  197. #define EPSILON_BIT 8
  198.   OP_OPEN_SUBEXP = EPSILON_BIT | 0,
  199.   OP_CLOSE_SUBEXP = EPSILON_BIT | 1,
  200.   OP_ALT = EPSILON_BIT | 2,
  201.   OP_DUP_ASTERISK = EPSILON_BIT | 3,
  202.   OP_DUP_PLUS = EPSILON_BIT | 4,
  203.   OP_DUP_QUESTION = EPSILON_BIT | 5,
  204.   ANCHOR = EPSILON_BIT | 6,
  205.  
  206.   /* Tree type, these are used only by tree. */
  207.   CONCAT = 16,
  208.  
  209.   /* Token type, these are used only by token.  */
  210.   OP_OPEN_BRACKET = 17,
  211.   OP_CLOSE_BRACKET,
  212.   OP_CHARSET_RANGE,
  213.   OP_OPEN_DUP_NUM,
  214.   OP_CLOSE_DUP_NUM,
  215.   OP_NON_MATCH_LIST,
  216.   OP_OPEN_COLL_ELEM,
  217.   OP_CLOSE_COLL_ELEM,
  218.   OP_OPEN_EQUIV_CLASS,
  219.   OP_CLOSE_EQUIV_CLASS,
  220.   OP_OPEN_CHAR_CLASS,
  221.   OP_CLOSE_CHAR_CLASS,
  222.   OP_WORD,
  223.   OP_NOTWORD,
  224.   OP_SPACE,
  225.   OP_NOTSPACE,
  226.   BACK_SLASH
  227.  
  228. } re_token_type_t;
  229.  
  230. #ifdef RE_ENABLE_I18N
  231. typedef struct
  232. {
  233.   /* Multibyte characters.  */
  234.   wchar_t *mbchars;
  235.  
  236.   /* Collating symbols.  */
  237. # ifdef _LIBC
  238.   int32_t *coll_syms;
  239. # endif
  240.  
  241.   /* Equivalence classes. */
  242. # ifdef _LIBC
  243.   int32_t *equiv_classes;
  244. # endif
  245.  
  246.   /* Range expressions. */
  247. # ifdef _LIBC
  248.   uint32_t *range_starts;
  249.   uint32_t *range_ends;
  250. # else /* not _LIBC */
  251.   wchar_t *range_starts;
  252.   wchar_t *range_ends;
  253. # endif /* not _LIBC */
  254.  
  255.   /* Character classes. */
  256.   wctype_t *char_classes;
  257.  
  258.   /* If this character set is the non-matching list.  */
  259.   unsigned int non_match : 1;
  260.  
  261.   /* # of multibyte characters.  */
  262.   int nmbchars;
  263.  
  264.   /* # of collating symbols.  */
  265.   int ncoll_syms;
  266.  
  267.   /* # of equivalence classes. */
  268.   int nequiv_classes;
  269.  
  270.   /* # of range expressions. */
  271.   int nranges;
  272.  
  273.   /* # of character classes. */
  274.   int nchar_classes;
  275. } re_charset_t;
  276. #endif /* RE_ENABLE_I18N */
  277.  
  278. typedef struct
  279. {
  280.   union
  281.   {
  282.     unsigned char c;        /* for CHARACTER */
  283.     re_bitset_ptr_t sbcset;    /* for SIMPLE_BRACKET */
  284. #ifdef RE_ENABLE_I18N
  285.     re_charset_t *mbcset;    /* for COMPLEX_BRACKET */
  286. #endif /* RE_ENABLE_I18N */
  287.     int idx;            /* for BACK_REF */
  288.     re_context_type ctx_type;    /* for ANCHOR */
  289.   } opr;
  290. #if __GNUC__ >= 2
  291.   re_token_type_t type : 8;
  292. #else
  293.   re_token_type_t type;
  294. #endif
  295.   unsigned int constraint : 10;    /* context constraint */
  296.   unsigned int duplicated : 1;
  297.   unsigned int opt_subexp : 1;
  298. #ifdef RE_ENABLE_I18N
  299.   /* These 2 bits can be moved into the union if needed (e.g. if running out
  300.      of bits; move opr.c to opr.c.c and move the flags to opr.c.flags).  */
  301.   unsigned int mb_partial : 1;
  302. #endif
  303.   unsigned int word_char : 1;
  304. } re_token_t;
  305.  
  306. #define IS_EPSILON_NODE(type) ((type) & EPSILON_BIT)
  307. #define ACCEPT_MB_NODE(type) \
  308.   ((type) >= OP_PERIOD && (type) <= OP_UTF8_PERIOD)
  309.  
  310. struct re_string_t
  311. {
  312.   /* Indicate the raw buffer which is the original string passed as an
  313.      argument of regexec(), re_search(), etc..  */
  314.   const unsigned char *raw_mbs;
  315.   /* Store the multibyte string.  In case of "case insensitive mode" like
  316.      REG_ICASE, upper cases of the string are stored, otherwise MBS points
  317.      the same address that RAW_MBS points.  */
  318.   unsigned char *mbs;
  319. #ifdef RE_ENABLE_I18N
  320.   /* Store the wide character string which is corresponding to MBS.  */
  321.   wint_t *wcs;
  322.   int *offsets;
  323.   mbstate_t cur_state;
  324. #endif
  325.   /* Index in RAW_MBS.  Each character mbs[i] corresponds to
  326.      raw_mbs[raw_mbs_idx + i].  */
  327.   int raw_mbs_idx;
  328.   /* The length of the valid characters in the buffers.  */
  329.   int valid_len;
  330.   /* The corresponding number of bytes in raw_mbs array.  */
  331.   int valid_raw_len;
  332.   /* The length of the buffers MBS and WCS.  */
  333.   int bufs_len;
  334.   /* The index in MBS, which is updated by re_string_fetch_byte.  */
  335.   int cur_idx;
  336.   /* length of RAW_MBS array.  */
  337.   int raw_len;
  338.   /* This is RAW_LEN - RAW_MBS_IDX + VALID_LEN - VALID_RAW_LEN.  */
  339.   int len;
  340.   /* End of the buffer may be shorter than its length in the cases such
  341.      as re_match_2, re_search_2.  Then, we use STOP for end of the buffer
  342.      instead of LEN.  */
  343.   int raw_stop;
  344.   /* This is RAW_STOP - RAW_MBS_IDX adjusted through OFFSETS.  */
  345.   int stop;
  346.  
  347.   /* The context of mbs[0].  We store the context independently, since
  348.      the context of mbs[0] may be different from raw_mbs[0], which is
  349.      the beginning of the input string.  */
  350.   unsigned int tip_context;
  351.   /* The translation passed as a part of an argument of re_compile_pattern.  */
  352.   unsigned RE_TRANSLATE_TYPE trans;
  353.   /* Copy of re_dfa_t's word_char.  */
  354.   re_const_bitset_ptr_t word_char;
  355.   /* 1 if REG_ICASE.  */
  356.   unsigned char icase;
  357.   unsigned char is_utf8;
  358.   unsigned char map_notascii;
  359.   unsigned char mbs_allocated;
  360.   unsigned char offsets_needed;
  361.   unsigned char newline_anchor;
  362.   unsigned char word_ops_used;
  363.   int mb_cur_max;
  364. };
  365. typedef struct re_string_t re_string_t;
  366.  
  367.  
  368. struct re_dfa_t;
  369. typedef struct re_dfa_t re_dfa_t;
  370.  
  371. #ifndef _LIBC
  372. # ifdef __i386__
  373. #  define internal_function   __attribute ((regparm (3), stdcall))
  374. # else
  375. #  define internal_function
  376. # endif
  377. #endif
  378.  
  379. #ifndef RE_NO_INTERNAL_PROTOTYPES
  380. static reg_errcode_t re_string_allocate (re_string_t *pstr, const char *str,
  381.                      int len, int init_len,
  382.                      RE_TRANSLATE_TYPE trans, int icase,
  383.                      const re_dfa_t *dfa)
  384.      internal_function;
  385. static reg_errcode_t re_string_construct (re_string_t *pstr, const char *str,
  386.                       int len, RE_TRANSLATE_TYPE trans,
  387.                       int icase, const re_dfa_t *dfa)
  388.      internal_function;
  389. static reg_errcode_t re_string_reconstruct (re_string_t *pstr, int idx,
  390.                         int eflags) internal_function;
  391. static reg_errcode_t re_string_realloc_buffers (re_string_t *pstr,
  392.                         int new_buf_len)
  393.      internal_function;
  394. # ifdef RE_ENABLE_I18N
  395. static void build_wcs_buffer (re_string_t *pstr) internal_function;
  396. static int build_wcs_upper_buffer (re_string_t *pstr) internal_function;
  397. # endif /* RE_ENABLE_I18N */
  398. static void build_upper_buffer (re_string_t *pstr) internal_function;
  399. static void re_string_translate_buffer (re_string_t *pstr) internal_function;
  400. static void re_string_destruct (re_string_t *pstr) internal_function;
  401. # ifdef RE_ENABLE_I18N
  402. static int re_string_elem_size_at (const re_string_t *pstr, int idx)
  403.      internal_function;
  404. static inline int re_string_char_size_at (const re_string_t *pstr, int idx)
  405.      internal_function;
  406. static inline wint_t re_string_wchar_at (const re_string_t *pstr, int idx)
  407.      internal_function;
  408. # endif /* RE_ENABLE_I18N */
  409. static unsigned int re_string_context_at (const re_string_t *input, int idx,
  410.                       int eflags) internal_function;
  411. static unsigned char re_string_peek_byte_case (const re_string_t *pstr,
  412.                            int idx) internal_function;
  413. static unsigned char re_string_fetch_byte_case (re_string_t *pstr)
  414.      internal_function;
  415. #endif
  416. #define re_string_peek_byte(pstr, offset) \
  417.   ((pstr)->mbs[(pstr)->cur_idx + offset])
  418. #define re_string_fetch_byte(pstr) \
  419.   ((pstr)->mbs[(pstr)->cur_idx++])
  420. #define re_string_first_byte(pstr, idx) \
  421.   ((idx) == (pstr)->valid_len || (pstr)->wcs[idx] != WEOF)
  422. #define re_string_is_single_byte_char(pstr, idx) \
  423.   ((pstr)->wcs[idx] != WEOF && ((pstr)->valid_len == (idx) + 1 \
  424.                 || (pstr)->wcs[(idx) + 1] != WEOF))
  425. #define re_string_eoi(pstr) ((pstr)->stop <= (pstr)->cur_idx)
  426. #define re_string_cur_idx(pstr) ((pstr)->cur_idx)
  427. #define re_string_get_buffer(pstr) ((pstr)->mbs)
  428. #define re_string_length(pstr) ((pstr)->len)
  429. #define re_string_byte_at(pstr,idx) ((pstr)->mbs[idx])
  430. #define re_string_skip_bytes(pstr,idx) ((pstr)->cur_idx += (idx))
  431. #define re_string_set_index(pstr,idx) ((pstr)->cur_idx = (idx))
  432.  
  433. #define re_malloc(t,n) ((t *) malloc ((n) * sizeof (t)))
  434. /* SunOS 4.1.x realloc doesn't accept null pointers: pre-Standard C. Sigh. */
  435. #define re_realloc(p,t,n) ((p != NULL) ? (t *) realloc (p,(n)*sizeof(t)) : (t *) calloc(n,sizeof(t)))
  436.  
  437. #define re_free(p) free (p)
  438.  
  439. struct bin_tree_t
  440. {
  441.   struct bin_tree_t *parent;
  442.   struct bin_tree_t *left;
  443.   struct bin_tree_t *right;
  444.  
  445.   /* `node_idx' is the index in dfa->nodes, if `type' == 0.
  446.      Otherwise `type' indicate the type of this node.  */
  447.   re_token_type_t type;
  448.   int node_idx;
  449.  
  450.   int first;
  451.   int next;
  452.   re_node_set eclosure;
  453. };
  454. typedef struct bin_tree_t bin_tree_t;
  455.  
  456. #define BIN_TREE_STORAGE_SIZE \
  457.   ((1024 - sizeof (void *)) / sizeof (bin_tree_t))
  458.  
  459. struct bin_tree_storage_t
  460. {
  461.   struct bin_tree_storage_t *next;
  462.   bin_tree_t data[BIN_TREE_STORAGE_SIZE];
  463. };
  464. typedef struct bin_tree_storage_t bin_tree_storage_t;
  465.  
  466. #define CONTEXT_WORD 1
  467. #define CONTEXT_NEWLINE (CONTEXT_WORD << 1)
  468. #define CONTEXT_BEGBUF (CONTEXT_NEWLINE << 1)
  469. #define CONTEXT_ENDBUF (CONTEXT_BEGBUF << 1)
  470.  
  471. #define IS_WORD_CONTEXT(c) ((c) & CONTEXT_WORD)
  472. #define IS_NEWLINE_CONTEXT(c) ((c) & CONTEXT_NEWLINE)
  473. #define IS_BEGBUF_CONTEXT(c) ((c) & CONTEXT_BEGBUF)
  474. #define IS_ENDBUF_CONTEXT(c) ((c) & CONTEXT_ENDBUF)
  475. #define IS_ORDINARY_CONTEXT(c) ((c) == 0)
  476.  
  477. #define IS_WORD_CHAR(ch) (isalnum (ch) || (ch) == '_')
  478. #define IS_NEWLINE(ch) ((ch) == NEWLINE_CHAR)
  479. #define IS_WIDE_WORD_CHAR(ch) (iswalnum (ch) || (ch) == L'_')
  480. #define IS_WIDE_NEWLINE(ch) ((ch) == WIDE_NEWLINE_CHAR)
  481.  
  482. #define NOT_SATISFY_PREV_CONSTRAINT(constraint,context) \
  483.  ((((constraint) & PREV_WORD_CONSTRAINT) && !IS_WORD_CONTEXT (context)) \
  484.   || ((constraint & PREV_NOTWORD_CONSTRAINT) && IS_WORD_CONTEXT (context)) \
  485.   || ((constraint & PREV_NEWLINE_CONSTRAINT) && !IS_NEWLINE_CONTEXT (context))\
  486.   || ((constraint & PREV_BEGBUF_CONSTRAINT) && !IS_BEGBUF_CONTEXT (context)))
  487.  
  488. #define NOT_SATISFY_NEXT_CONSTRAINT(constraint,context) \
  489.  ((((constraint) & NEXT_WORD_CONSTRAINT) && !IS_WORD_CONTEXT (context)) \
  490.   || (((constraint) & NEXT_NOTWORD_CONSTRAINT) && IS_WORD_CONTEXT (context)) \
  491.   || (((constraint) & NEXT_NEWLINE_CONSTRAINT) && !IS_NEWLINE_CONTEXT (context)) \
  492.   || (((constraint) & NEXT_ENDBUF_CONSTRAINT) && !IS_ENDBUF_CONTEXT (context)))
  493.  
  494. struct re_dfastate_t
  495. {
  496.   unsigned int hash;
  497.   re_node_set nodes;
  498.   re_node_set *entrance_nodes;
  499.   struct re_dfastate_t **trtable;
  500.   unsigned int context : 4;
  501.   unsigned int halt : 1;
  502.   /* If this state can accept `multi byte'.
  503.      Note that we refer to multibyte characters, and multi character
  504.      collating elements as `multi byte'.  */
  505.   unsigned int accept_mb : 1;
  506.   /* If this state has backreference node(s).  */
  507.   unsigned int has_backref : 1;
  508.   unsigned int has_constraint : 1;
  509.   unsigned int word_trtable : 1;
  510. };
  511. typedef struct re_dfastate_t re_dfastate_t;
  512.  
  513. typedef struct
  514. {
  515.   /* start <= node < end  */
  516.   int start;
  517.   int end;
  518. } re_subexp_t;
  519.  
  520. struct re_state_table_entry
  521. {
  522.   int num;
  523.   int alloc;
  524.   re_dfastate_t **array;
  525. };
  526.  
  527. /* Array type used in re_sub_match_last_t and re_sub_match_top_t.  */
  528.  
  529. typedef struct
  530. {
  531.   int next_idx;
  532.   int alloc;
  533.   re_dfastate_t **array;
  534. } state_array_t;
  535.  
  536. /* Store information about the node NODE whose type is OP_CLOSE_SUBEXP.  */
  537.  
  538. typedef struct
  539. {
  540.   int node;
  541.   int str_idx; /* The position NODE match at.  */
  542.   state_array_t path;
  543. } re_sub_match_last_t;
  544.  
  545. /* Store information about the node NODE whose type is OP_OPEN_SUBEXP.
  546.    And information about the node, whose type is OP_CLOSE_SUBEXP,
  547.    corresponding to NODE is stored in LASTS.  */
  548.  
  549. typedef struct
  550. {
  551.   int str_idx;
  552.   int node;
  553.   int next_last_offset;
  554.   state_array_t *path;
  555.   int alasts; /* Allocation size of LASTS.  */
  556.   int nlasts; /* The number of LASTS.  */
  557.   re_sub_match_last_t **lasts;
  558. } re_sub_match_top_t;
  559.  
  560. struct re_backref_cache_entry
  561. {
  562.   int node;
  563.   int str_idx;
  564.   int subexp_from;
  565.   int subexp_to;
  566.   int flag;
  567. };
  568.  
  569. typedef struct
  570. {
  571.   /* The string object corresponding to the input string.  */
  572.   re_string_t input;
  573. #if defined _LIBC || (defined __STDC_VERSION__ && __STDC_VERSION__ >= 199901L)
  574.   re_dfa_t *const dfa;
  575. #else
  576.   re_dfa_t *dfa;
  577. #endif
  578.   /* EFLAGS of the argument of regexec.  */
  579.   int eflags;
  580.   /* Where the matching ends.  */
  581.   int match_last;
  582.   int last_node;
  583.   /* The state log used by the matcher.  */
  584.   re_dfastate_t **state_log;
  585.   int state_log_top;
  586.   /* Back reference cache.  */
  587.   int nbkref_ents;
  588.   int abkref_ents;
  589.   struct re_backref_cache_entry *bkref_ents;
  590.   int max_mb_elem_len;
  591.   int nsub_tops;
  592.   int asub_tops;
  593.   re_sub_match_top_t **sub_tops;
  594. } re_match_context_t;
  595.  
  596. typedef struct
  597. {
  598.   int cur_bkref;
  599.   int cls_subexp_idx;
  600.  
  601.   re_dfastate_t **sifted_states;
  602.   re_dfastate_t **limited_states;
  603.  
  604.   re_node_set limits;
  605.  
  606.   int last_node;
  607.   int last_str_idx;
  608.   int check_subexp;
  609. } re_sift_context_t;
  610.  
  611. struct re_fail_stack_ent_t
  612. {
  613.   int idx;
  614.   int node;
  615.   regmatch_t *regs;
  616.   re_node_set eps_via_nodes;
  617. };
  618.  
  619. struct re_fail_stack_t
  620. {
  621.   int num;
  622.   int alloc;
  623.   struct re_fail_stack_ent_t *stack;
  624. };
  625.  
  626. struct re_dfa_t
  627. {
  628.   re_subexp_t *subexps;
  629.   re_token_t *nodes;
  630.   int nodes_alloc;
  631.   int nodes_len;
  632.   int *nexts;
  633.   int *org_indices;
  634.   re_node_set *edests;
  635.   re_node_set *eclosures;
  636.   re_node_set *inveclosures;
  637.   struct re_state_table_entry *state_table;
  638.   re_dfastate_t *init_state;
  639.   re_dfastate_t *init_state_word;
  640.   re_dfastate_t *init_state_nl;
  641.   re_dfastate_t *init_state_begbuf;
  642.   bin_tree_t *str_tree;
  643.   bin_tree_storage_t *str_tree_storage;
  644.   re_bitset_ptr_t sb_char;
  645.   int str_tree_storage_idx;
  646.  
  647.   /* number of subexpressions `re_nsub' is in regex_t.  */
  648.   int subexps_alloc;
  649.   unsigned int state_hash_mask;
  650.   int states_alloc;
  651.   int init_node;
  652.   int nbackref; /* The number of backreference in this dfa.  */
  653.   /* Bitmap expressing which backreference is used.  */
  654.   unsigned int used_bkref_map;
  655.   unsigned int has_plural_match : 1;
  656.   /* If this dfa has "multibyte node", which is a backreference or
  657.      a node which can accept multibyte character or multi character
  658.      collating element.  */
  659.   unsigned int has_mb_node : 1;
  660.   unsigned int is_utf8 : 1;
  661.   unsigned int map_notascii : 1;
  662.   unsigned int word_ops_used : 1;
  663.   int mb_cur_max;
  664.   bitset word_char;
  665.   reg_syntax_t syntax;
  666. #ifdef DEBUG
  667.   char* re_str;
  668. #endif
  669. };
  670.  
  671. #ifndef RE_NO_INTERNAL_PROTOTYPES
  672. static reg_errcode_t re_node_set_alloc (re_node_set *set, int size) internal_function;
  673. static reg_errcode_t re_node_set_init_1 (re_node_set *set, int elem) internal_function;
  674. static reg_errcode_t re_node_set_init_2 (re_node_set *set, int elem1,
  675.                      int elem2) internal_function;
  676. #define re_node_set_init_empty(set) memset (set, '\0', sizeof (re_node_set))
  677. static reg_errcode_t re_node_set_init_copy (re_node_set *dest,
  678.                         const re_node_set *src) internal_function;
  679. static reg_errcode_t re_node_set_add_intersect (re_node_set *dest,
  680.                         const re_node_set *src1,
  681.                         const re_node_set *src2) internal_function;
  682. static reg_errcode_t re_node_set_init_union (re_node_set *dest,
  683.                          const re_node_set *src1,
  684.                          const re_node_set *src2) internal_function;
  685. static reg_errcode_t re_node_set_merge (re_node_set *dest,
  686.                     const re_node_set *src) internal_function;
  687. static int re_node_set_insert (re_node_set *set, int elem) internal_function;
  688. static int re_node_set_compare (const re_node_set *set1,
  689.                 const re_node_set *set2) internal_function;
  690. static int re_node_set_contains (const re_node_set *set, int elem) internal_function;
  691. static void re_node_set_remove_at (re_node_set *set, int idx) internal_function;
  692. #define re_node_set_remove(set,id) \
  693.   (re_node_set_remove_at (set, re_node_set_contains (set, id) - 1))
  694. #define re_node_set_empty(p) ((p)->nelem = 0)
  695. #define re_node_set_free(set) re_free ((set)->elems)
  696. static int re_dfa_add_node (re_dfa_t *dfa, re_token_t token, int mode) internal_function;
  697. static re_dfastate_t *re_acquire_state (reg_errcode_t *err, re_dfa_t *dfa,
  698.                     const re_node_set *nodes) internal_function;
  699. static re_dfastate_t *re_acquire_state_context (reg_errcode_t *err,
  700.                         re_dfa_t *dfa,
  701.                         const re_node_set *nodes,
  702.                         unsigned int context) internal_function;
  703. static void free_state (re_dfastate_t *state) internal_function;
  704. #endif
  705.  
  706.  
  707. typedef enum
  708. {
  709.   SB_CHAR,
  710.   MB_CHAR,
  711.   EQUIV_CLASS,
  712.   COLL_SYM,
  713.   CHAR_CLASS
  714. } bracket_elem_type;
  715.  
  716. typedef struct
  717. {
  718.   bracket_elem_type type;
  719.   union
  720.   {
  721.     unsigned char ch;
  722.     unsigned char *name;
  723.     wchar_t wch;
  724.   } opr;
  725. } bracket_elem_t;
  726.  
  727.  
  728. /* Inline functions for bitset operation.  */
  729. static inline void
  730. bitset_not (bitset set)
  731. {
  732.   int bitset_i;
  733.   for (bitset_i = 0; bitset_i < BITSET_UINTS; ++bitset_i)
  734.     set[bitset_i] = ~set[bitset_i];
  735. }
  736.  
  737. static inline void
  738. bitset_merge (bitset dest, const bitset src)
  739. {
  740.   int bitset_i;
  741.   for (bitset_i = 0; bitset_i < BITSET_UINTS; ++bitset_i)
  742.     dest[bitset_i] |= src[bitset_i];
  743. }
  744.  
  745. static inline void
  746. bitset_not_merge (bitset dest, const bitset src)
  747. {
  748.   int i;
  749.   for (i = 0; i < BITSET_UINTS; ++i)
  750.     dest[i] |= ~src[i];
  751. }
  752.  
  753. static inline void
  754. bitset_mask (bitset dest, const bitset src)
  755. {
  756.   int bitset_i;
  757.   for (bitset_i = 0; bitset_i < BITSET_UINTS; ++bitset_i)
  758.     dest[bitset_i] &= src[bitset_i];
  759. }
  760.  
  761. #if defined RE_ENABLE_I18N && !defined RE_NO_INTERNAL_PROTOTYPES
  762. /* Inline functions for re_string.  */
  763. static inline int
  764. internal_function
  765. re_string_char_size_at (const re_string_t *pstr, int idx)
  766. {
  767.   int byte_idx;
  768.   if (pstr->mb_cur_max == 1)
  769.     return 1;
  770.   for (byte_idx = 1; idx + byte_idx < pstr->valid_len; ++byte_idx)
  771.     if (pstr->wcs[idx + byte_idx] != WEOF)
  772.       break;
  773.   return byte_idx;
  774. }
  775.  
  776. static inline wint_t
  777. internal_function
  778. re_string_wchar_at (const re_string_t *pstr, int idx)
  779. {
  780.   if (pstr->mb_cur_max == 1)
  781.     return (wint_t) pstr->mbs[idx];
  782.   return (wint_t) pstr->wcs[idx];
  783. }
  784.  
  785. static int
  786. internal_function
  787. re_string_elem_size_at (const re_string_t *pstr, int idx)
  788. {
  789. #ifdef _LIBC
  790.   const unsigned char *p, *extra;
  791.   const int32_t *table, *indirect;
  792.   int32_t tmp;
  793. # include <locale/weight.h>
  794.   uint_fast32_t nrules = _NL_CURRENT_WORD (LC_COLLATE, _NL_COLLATE_NRULES);
  795.  
  796.   if (nrules != 0)
  797.     {
  798.       table = (const int32_t *) _NL_CURRENT (LC_COLLATE, _NL_COLLATE_TABLEMB);
  799.       extra = (const unsigned char *)
  800.     _NL_CURRENT (LC_COLLATE, _NL_COLLATE_EXTRAMB);
  801.       indirect = (const int32_t *) _NL_CURRENT (LC_COLLATE,
  802.                         _NL_COLLATE_INDIRECTMB);
  803.       p = pstr->mbs + idx;
  804.       tmp = findidx (&p);
  805.       return p - pstr->mbs - idx;
  806.     }
  807.   else
  808. #endif /* _LIBC */
  809.     return 1;
  810. }
  811. #endif /* RE_ENABLE_I18N */
  812.  
  813. #endif /*  _REGEX_INTERNAL_H */
  814.